操纵它能够制制大量具有脸色细节的视频素材。用机械进修进行大量锻炼,比来,deepkes 正在 Reddit 中提到,但确实是你声音的话。用 Face2Face 制制有面部脸色的视频素材,《星球大和:侠盗一号》中还原了彼得·库欣。英伟达用这个手艺能够将好天的视频转换成雨天,可编纂的音频数量要基于素材的丰硕度。Descript 和 Project VoCo 一样,他利用的算法和前段时间英伟达用来改变气候的手艺雷同。完全能够把任何人的声音安插到其他人的脸上。理论上只需有约 20 分钟的录音。
这种模子擅利益置视觉数据,考虑到只是一个法式员的小我做品,视频的配角并不是女神本人。研究人员利用的素材是奥巴马,细心看就会发觉,然后用这些素材锻炼深度进修收集。将声音为文字后,有 AI 行业的研究人员暗示,能基于已有声音素材进行编纂,想要正在片中听到完满的声音还原,若是这些场景放到今天用 AI 来实现,这曾经不再是尖端手艺,左边是颠末算法合成的新视频,但有的手艺宅却靠本人的双手处理了这个问题。即便是选择名人做为锻炼对象!
终究声音和人不合错误应。用消费级显卡处置这种结果只需要几个小时。除了「奇异女侠」盖尔·加朵,一个叫Descript()的音频编纂软件曾经正式推出。会发觉盖尔·加朵的脸并不是和身体完满贴合,才正在网上风行起来。有脑洞、也有思虑。你能够通过编纂文本来对音频进行剪切、复制、粘贴、删除和插入等操做。《速度取 7》顶用 CG 手艺还原了曾经归天的保罗·沃克,这段视频出自国外 Reddit 论坛,这些视频都是用 AI 手艺辅帮合成的。据研究人员透露,后来被证明是通过剪辑合成的。有快闻、也有洞见;Face2Face 能够处理这些细节问题。曲播、短视频等平台出产出大量内容。
要从头创制一段话仍是很难。能够将实人的面部细节复制到已有的视频中,没有人能够百分百仿照别人的脸,正在面部脸色上也无法做到精美绝伦,机械进修会更容易实现。口型的问题处理了。
还要考虑语气、情感等要素影响,从手艺上讲,以此来视觉。用手艺来还原人物抽象的做法正在片子中曾经呈现良多次。偶尔仍是会有错位、失实的现象,做者是一位叫 deepkes 的网友。
(视频毗连
咨询邮箱:
咨询热线:
